1
El Panorama de la IA Generativa Avanzada
PolyU COMP5511Lesson 11
00:00

El panorama de la IA Generativa Avanzada ha evolucionado desde modelos aislados y monolíticos hacia un ecosistema multicapa definido por los Sistemas de IA Compuestos. Este cambio se aleja de la simple predicción probabilística de tokens hacia sistemas que orquestan modelos fundacionales (FMs), complementos modulares y síntesis multimodal.

Cómputo / Infraestructura en la NubeLLMsDifusiónAudio / CódigoCapa de Orquestación y Agentes

La Taxonomía de la Pila Generativa

  • Capa de Infraestructura: La columna vertebral de hardware (GPUs/TPUs) y los servicios en la nube que proporcionan la enorme potencia de cómputo necesaria para el entrenamiento y la inferencia de alta velocidad.
  • Capa de Modelos: Los modelos fundacionales (FMs), como GPT-4, Llama 3 y Stable Diffusion, que actúan como motores especializados para diferentes modalidades.
  • Capa de Orquestación: Marcos de trabajo que gestionan la lógica, el flujo de datos y la recuperación, haciendo transitar los modelos de pesos "congelados" a sistemas con Conciencia Contextual en Tiempo Real.

Convergencia de Modalidades

La tendencia técnica se centra en unificar arquitecturas —principalmente modelos Transformer y de Difusión—, lo que permite un espacio latente compartido. Esto hace posible una interfaz unificada única donde texto, imagen y video se manipulan como un flujo continuo de información, representado matemáticamente como una correspondencia entre variedades latentes dispares $M_{text} \leftrightarrow M_{visual}$.

Evolución Estructural
Estamos pasando de modelos de "Libro Cerrado" que dependen únicamente de los parámetros $\theta$ de los datos de entrenamiento, a sistemas de "Libro Abierto" que utilizan el estado $E$ del entorno externo para resolver tareas de razonamiento complejas mediante $P(y|x, E)$.
Implementación en Python